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摘 要 : [目的 /意义 ] 介 绍 


中 国 科 学 院 文献 情报 中 心 在 电子 资源 科技 支撑 绩 3 
果 ,为 科研 机 构 开 展 电子 资源 科技 支撑 绩效 评价 工作 提供 有 益 参 考 。 


[方法 “过程 ] 


结合 国 


一 已 只 


效 评价 领域 开展 的 工作 以 及 取得 的 阶段 性 成 


国内 外 电子 资源 成 效 评估 


的 理论 与 实践 ,构建 以 外 文 电子 期 刊 为 案例 的 电子 资源 科技 支撑 绩效 评价 指标 体系 ,并 进行 实例 评价 ;同时 ,根据 
绩效 评价 需求 ,补充 和 完善 面向 研究 所 评价 目的 的 电子 资源 科技 支撑 绩效 评价 指标 体系 。 [ 结 


研究 所 的 科技 支撑 名 


果 / 结 论 ] 通 过 实例 评价 


求 ,改造 构建 形成 了 


词 : 外 文 电子 期 刊 
: G250 
10. 13266/j. issn. 0252 — 


满足 集团 军 头 单位 和 研究 所 评价 


评价 方面 .16 项 评价 指标 。 
集团 采购 ”科技 支撑 绩效 


评价 指标 体系 


3116. 2020. 24. 007 


,构建 的 外 文 电子 期 刊 科技 支撑 绩效 指标 体系 具有 可 操作 性 ;同时 ,融合 研究 所 的 评价 需 
需求 的 外 文 电 子 期 刊 科技 支撑 评价 指标 体系 ,具体 包含 4 个 


交 lo 人 息 的 主要 信息 


来源。 人 


Re 
强 带 资源 对 科技 创新 活动 支撑 效果 的 评价 ,以 此 判断 


三 | 
是 否 合 理 


对 面子 资源 的 投入 


要 家 .资源 内 容 是 否 满足 科研 活动 需要 。 由 全 国 数字 


效 评价 指标 体系 ,并 结合 


图 资源 结构 是 否 符合 学 科 | 体系 进行 了 补充 和 完善 。 
本 文 将 介 2 


图 特 馆 建设 与 服务 联 会 议 组 织 并 在 近期 发 布 的 4 数 | 价 领域 开展 的 探索 性 
字 图 书馆 资源 管理 指南 》" 明确 将 “建立 和 完善 资源 
保障 效果 评估 制度 ,定期 或 每 年 度 开展 资源 保障 效果 | 价 工 作 提供 有 益 参 考 。 


评价 "纳入 数字 图 书馆 资源 管理 的 核心 工作 中 。 由 此 
电子 资源 开展 保 


可 见 , 对 引进 
图 书馆 资源 建设 者 的 3 


共识 o 


2002 年 ,中 国 科 学 院 文献 4 
头 组 织 中 国 科 学 院 ( 以 下 简称 "中 科 


献 中 心 ” ) 开始 奉 
院 ”) 科技 电 子 资源 的 集团 


技 电 子 资源 体 量 和 引进 经 费 ， 


技 创 新 活动 的 支撑 效果 ;同时 ,文献 中 心 
相关 评价 领域 已 取得 的 研究 成 果 ,结合 实际 工作 需求 ， 
建立 了 以 外 文 电子 期 刊 为 案例 的 电子 资源 科技 支撑 


评价 工作 的 需求 ,对 电子 资源 科技 支撑 续 


芝 鉴 国内 外 在 


绩 


究 所 对 引进 科技 电子 资源 
效 评价 指标 


如 文献 中 心 在 电子 资源 科技 支撑 续 效 评 


工作 以 及 取得 的 阶段 性 成 果 ,为 
推进 科学 `\ 有 效 .可 操作 性 的 电子 资源 科技 支撑 续 效 评 


1 成 效 评估 的 研究 和 实践 进展 


障 效果 评价 已 成 为 数字 


国际 图 


傅 报 中 心 (以 下 简称 ” 文 


探索 如 何 评价 中 国 科学 院 集团 引进 


采购 。 面 对 日 益 攀 升 的 科 介绍 
文献 中 心 在 2011 年 开始 
电子 资源 对 用 户 科 


书馆 服务 质量 评价 体系 主要 分 为 绩效 评估 
与 成 效 评估 两 大 体系 ” ,本 研究 开展 的 科技 支撑 绩效 评 
价 研究 与 成 效 评估 的 理论 概念 更 为 贴近 。 因 此 ,将 重点 
成 效 评 佑 领域 已 经 取得 的 研究 成 果 和 实践 进展 。 

成 效 评估 起 源 于 欧美 国家 的 图 书馆 界 ,以 1998 年 
6 月 ACRIL( 美 国 大 学 与 研究 图 书馆 协会 ) 发 布 的 《学 


要 2019 年 中 国 科学 院 文献 情报 能 力 建设 专项 课题 "分布 式 电子 资源 知识 资 
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术 图 书馆 成 效 评估 报告 》 白 皮 书 为 里 程 碑 ,系统 地 阐述 
了 成 效 与 成 效 评估 的 概念 .评估 原则 ,并 通过 案例 演示 
了 如 何 开展 成 效 评估 ” 。 此 后 ,国内 外 高 校 图 书馆 开 
展 了 系列 研究 工作 和 实践 ,不 断 完 善 成 效 评估 的 理论 
和 方法 。 
1.1 成 效 评 估 的 理论 研究 成 果 
经 过 ACRL IMLS( 美 国 博物 馆 和 图 书馆 协会 )、 

ISO( 国际 标准 化 组 织 ) 等 国外 重要 机 构 对 成 效 评估 的 
多 年 研究 ,对 成 效 评估 的 定义 形成 两 种 观点 :一 种 观点 
是 从 用 户 个 体 角 度 评估 图 书馆 读者 在 利用 图 书馆 资 
源 .服务 和 活动 后 用 户 自 身 发 生 的 变化 或 获得 的 成 功 ， 
包括 用 户 在 技能 、 知 识 、 能 力 \ 行 为 方面 的 变化 或 获得 
的 成 功 ”; 另 一 种 观点 是 从 图 书馆 用 户 发 生 的 变化 来 
请 舍 图 书馆 项 目 、 服 务 所 产生 的 价值 ”。 
成 效 评估 ,通过 围绕 图 书馆 用 户 的 变化 来 进行 评 
纲 划 。 因 此 ,不同 评估 主体 即 不 同 图 书馆 ,将 根据 

和 的 特点 和 具体 任务 设计 不 同 的 成 效 评估 指标 。 尽 
管 种 具体 评估 指标 方面 存在 差异 ,但 评估 的 主要 内 容 
具 存 一 致 性 。 即 31， 

〇 (1) 学 术 水 平 变化 的 评估 (Js the academic per- 
fo nce of students improved through their contact with 
WEDibrary?) ; 

(2) 职业 生涯 变化 的 评估 (By using the library, do 


studéents improve their chances of having a successful ca- 


redf&) ; 
性 (3) 学 业 发 展 变化 的 评估 ( Are undergraduates who 
ut the Tibras -more. Ti 
soop1?) ; 
(4) 学 生 信息 素养 变化 的 评估 (Does the library's 
bibliggranhie. Tnstiuotion: progranm, teli in a Piel Joveludt 
“information literacy” among students? ) ; 


(5) 授课 教师 教学 工作 变化 的 评估 (As a result of 


collaboration with the library’ s staff, are faculty members 


more likely to view use of the library as an integral part of 
their courses? ) ; 

(6) 学 生 未 来 成 功 生活 变化 的 评估 (Are students 
who use the library more likely to lead fuller and more sat- 
jsfying lives?) 。 

1.2 国外 成 效 评估 的 实践 进展 

国外 开展 成 效 评估 的 主体 集中 在 高 校 图 书馆 ,其 
影响 成 效 评估 理论 发 展 的 实践 活动 主要 是 SCONUL 

( 英 联 邦 大 学 与 图 书馆 学 会 ) 和 LIRG( 图 书馆 与 信息 

研究 组 ) 开展 的 影响 评 佑 项目 ( Impact Implementation 


Initiative) .ACRL 开展 的 行动 评估 项 目 (Assessment in 
Academic Libraries and Students Success ,AiA) 。 

SCONUILZLIRG 联手 实施 的 影响 评估 项 目 开 始 于 
2003 年 ,英国 的 22 所 大 学 图 书馆 参与 了 该 项 目 , 评 
估 参 与 项 目的 每 所 大 学 开展 的 某 项 特殊 服务 或 某 项 创 
新 活动 对 学 校 的 学 习 教学 和 研究 工作 的 影响 。 该 项 
目 采 用 了 行动 研究 方法 (Action Research Methodolo- 
gy) ” ,包含 如 下 步 又 :参与 图 书馆 选择 需要 评估 的 内 
容 , 根 据 选 择 的 评估 内 容 设 立 具体 的 评估 主题 ,根据 评 
估 主 题 设 计 对 标的 “成 功 标 准 ” ,设计 评估 方法 、 明 确 
需要 收集 的 事实 证 据 并 采用 合适 的 手段 收集 这 些 证 
据 。 影 响 评估 项 目 将 行动 研究 的 步 又 应 用 于 评估 实践 
中 ,由 各 个 参与 项 目的 图 书馆 设计 个 性 化 的 评价 内 容 、 
评价 主题 .评价 方法 ,通过 22 所 案例 图 书馆 的 评价 实 
成 探索 建立 高 校 图 书馆 的 影响 评估 体系 和 评估 方法 。 
该 项 目的 实施 为 SCONUL 开展 后 续 项 日 (Value And 
Impact Programme ,VAMP ) 提 供 了 理论 依据 。 

ACRL 的 AiA 项 目 开 始 于 2013 年 ,其 后 三 年 中 有 
超过 200 家 的 高 校 机 构 参 与 ”。 各 个 高 校 机 构 按 项 目 
规定 组 建 评估 团队 ,由 评估 团队 根据 自身 高 校 机 构 的 
个 性 化 评 佑 要求 ,结合 ACRL 已 经 设立 的 评价 原则 , 评 
价 标准 等 理论 ,设计 评估 内 容 \ 评 估 指 标 、 评 估 方 法 , 形 
成 评 佑 结果。 经 过 三 年 的 项 目 实 施 ,高 校 图 书馆 对 学 
生成 功 的 影响 效果 得 到 了 充分 的 评估 和 展现 ,让 高 校 
机 构 看 到 了 图 书馆 对 学 生成 功 发 挥 的 积极 影响 ,也 让 
机 构 意识 到 图 书馆 能 融入 科研 团队 中 并 能 引导 开展 成 
效 评估 。 

1.3 国内 成 效 评估 的 实践 进展 

与 国外 类 似 ,国内 开展 成 效 评估 的 主体 集中 在 高 
校 图 书馆 ,参考 教育 部 颁发 的 《普通 高 等 学 校 图 书馆 评 
佑 指标 及 评估 办 法 (2010 年 修改 稿 )》” ,从 办 馆 条 件 、 
文献 资源 建设 .自动 化 网 络 化 和 数字 化 建设 .读者 服 
务 .科学 管理 5 个 方面 . 近 60 项 评价 指标 对 高 校 图 书 
馆 进 行 评 佑 。 其 评估 内 容 和 指标 侧重 于 评价 图 书馆 工 
作 质 量 ,与 国外 开展 的 成 效 评 佑 实践 有 着 较 大 差别 。 
而 以 电子 资源 对 用 户 科研 活动 影响 的 系统 评估 实践 活 
动 则 尚未 找到 。 


2 “科技 支撑 绩效 评价 ”的 评价 体系 框架 
设计 
2.1 “科技 支撑 绩效 评价 ”内 涵 与 评价 思 

国内 外 高 校 ,尤其 是 国外 高 校 在 成 效 评 估 领 域 取 
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为 例 [J]. 图 书 情报 工作 ,2020 ,64(24) :57 - 62. 


ee 
以 中 国 科学 太公 明天 


得 的 理论 研究 成 果 和 实践 经 验 , 为 科研 机 构 开 展 引进 
电子 资源 对 科研 用 户 科 技 创 新 活动 的 支撑 效果 的 评估 
提供 了 有 力 的 支撑 。 因 此 ,借鉴 “成 效 评估 ”涵义 ,将 
“科技 支撑 绩效 评价 "的 涵义 界定 为 集团 引进 电子 资 
源 对 科研 用 户 科 技 创新 活动 的 支撑 效果 ,尤其 对 支撑 
科研 用 户 的 文献 使 用 行为 .文献 需求 保障 和 科研 产 出 
方面 的 影响 。 有 别 于 目前 仅 针 对 学 生 影 响 的 评价 。 
基于 “科技 支撑 续 效 评价 " 内涵, 并 结合 已 有 ”成 
效 评 估 ”" 中 采用 的 评价 思路 ,确定 如 下 的 “科技 支撑 续 
效 评价 "评价 思路 :在 特定 时 段 , 中 科 院 科研 用 户 的 文 
献 使 用 行为 .文献 需求 .科研 产 出 方面 在 科研 机 构 引 进 


电子 资源 (尤其 是 电子 期 刊 ) 保 障 体系 中 所 受到 的 影 
响 和 变化 ;通过 评价 ,分 析 引 进 电子 资源 对 中 科 院 用 户 
科研 活动 和 科研 产 出 方面 的 影响 /贡献 以 及 存在 的 不 
足 , 进 而 为 科研 机 构 开 展 资源 建设 工作 提供 改进 和 提 
升 依据 。 
2.2 ”科技 支撑 绩效 评价 指标 体系 设计 

根据 “科技 支撑 绩效 评价 ”涵义 ,评价 思路 以 及 成 效 
评估 的 基本 定义 ,将 “科技 文 撑 绩效 评价 ”转化 为 对 用 户 
利用 程度 、 用 户 需 求 保障 、 用 户 科 研 产 出 及 保障 的 评价 。 
这 样 ,科技 支撑 绩效 评价 指标 体系 将 包含 3 个 评价 方 
面 .8 个 评价 指标 。 上 有 具体 的 评价 指标 体系 如 表 1 所 示 : 


表 1 科技 支撑 绩效 评价 指标 体系 


评价 方面 评价 指标 指标 涵义 计算 方法 
后 = 用 户 利用 程度 刊 均 全 文 下 载 量 在 特定 时 段 内 , 某 期 刊 数据 库 的 刊 均 全文 下 载 量 。 某 期 刊 数据 库 全 文 下 载 量 /有 下 载 量 的 期 刊 种 数 
用 户 需 求 保障 所 均 资源 可 获取 数量 特定 时 段 中 ,研究 所 平均 可 获取 电子 期 刊 种 数 数据 库 收 录 期 刊 种 数 x 参 团 研究 所 个 数 / 研 究 所 总 数 
9) 可 获取 资源 质量 引进 电子 期 刊 被 SCIJCRZEi 收录 的 比例 引进 电子 期 刊 被 SCIZLJCRZEi 收录 种 数 / 引 进 电子 翅 
© 
刊 种 数 

2 需求 满足 程度 在 特定 时 段 内 ,用 户 引 用 的 且 被 SCLJCR/Ei 收 户 引用 的 且 被 SCIZJCRZEi 收录 的 期 刊 种 数 / 本 研 
© 录 的 期 刊 占 本 人 研究 所 引进 电子 期 刊 的 比例 究 所 引进 的 电子 期 刊 种 数 

用 月 科研 产 出 及 保障 “在 SCIEAJCR/Ei 收录 期 ”在 特定 时 段 内 ,用 户 在 SCIEAJCRVEi 收录 的 期 ”用 户 在 被 SCLJCRZEi 收录 的 期 刊 中 发 表 文章 数量 
< 十 刊 中 发 表 文章 数量 刊 中 发 表 文章 数量 
发 文 期 刊 保 障 度 在 特定 时 段 内 ,用 户 发 文中 引用 期 刊 占 本 研究 所 户 发 文 期 刊 种 数 /本 研究 所 引进 电子 期 刊 的 种 数 
人 引进 电子 期 刊 的 比例 
© 申请 专利 数量 在 特定 时 段 内 ,用 户 申请 或 公开 专利 的 数量 用 户 在 中 国 专利 局 申请 专利 数量 
ON 申请 专利 中 引用 期 刊 保 在 特定 时 段 内 ,用 户 申 请 专利 中 引用 期 刊 占 引进 利 中 引用 期 刊 种 数 /本 研究 所 引进 电子 期 刊 种 数 

i 障 度 期 刊 比例 


3>< 外 文 电子 期 刊 科技 支撑 绩效 实例 评价 


.所 中 科 院 集团 引进 电子 资源 开始 于 2002 年 ,经 过 近 
本 展 ,在 2007 年 基本 构建 形成 了 稳定 的 科技 
电子 资源 保障 体系 ,外 文 电子 期 刊 对 用 户 科 研 活动 的 
影响 已 初 现 端倪 。 因 此 ,选取 2007 -2010 年 作为 案例 
评价 的 典型 时 段 ,进行 实例 评价 。 


< 


根据 各 评价 指标 的 计算 方法 ,选取 了 如 下 基础 数 
据 : 集 团 外 文 电 子 期 刊 下 载 量 ,外 文 电 子 期 刊 引 进 清 
单 , 参 团 研究 所 清单 ,SCIAJCR/Ei 期 刊 清单 ,中 科 院 集 
团 发 文 期 刊 清单 ,SCI 引文 期 刊 清单 ,DII 专利 清单 ,DII 
专利 中 引文 清单 。 
3.1 实例 评价 指标 值 测算 结果 

2007 -2010 年 ,各 评价 指标 的 测算 结果 如 表 2 所 示 : 


表 2 2007 -2010 年 科技 支撑 绩效 实例 评价 指标 值 测算 结果 一 览 


评价 方面 评价 指标 2007 年 2008 年 2009 年 2010 年 
户 利用 程度 刊 均 全 文 下 载 量 (篇 /种 ) 1 769 1 512 1 588 2 024 
户 需 求 保障 所 均 资源 可 获取 数量 (种 /所 ) 534 636 622 566 

可 获取 资源 质量 (% ) 85.27% 65.17% 72.75% 72.8% 

需求 满足 程度 ( % ) 81.04% 77. 89% 81.16% 82. 69% 

户 科研 产 出 SCIEAJCR/Ei 收录 期 刊 的 发 表 文 章 数量 (篇 ) 17 237 18 705 19 924 21 621 
发 文 期 刊 保障 度 (% ) 83.57% 79.34% 82. 20% 83.92% 

申请 专利 数量 (项 ) 943 1 205 1 623 2 112 

申请 专利 中 引用 期 刊 保障 度 (% ) 39.3% 32.8% 33.5% 30. 8% 


通过 测算 发 现 ,2007 -2010 年 间 ,科技 支撑 续 效 实 
例 评 价 指标 值 呈现 如 下 变化 : 


(1)“ 用 户 利用 程度 "方面 : 刊 均 全 文 下 载 量 "在 
2008 年 出 现 小 幅 下 降 后 持续 稳定 上 升 ; 
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(2)“ 用 户 需求 保障 ”方面 :OD“ 所 均 资源 可 获取 
数量 ”在 2007 - 2008 年 稳步 增长 ,但 在 2009 -2010 年 
出 现 小 幅 下 降 ;@ “可 获取 资源 质量 ”和 “需求 满足 度 ” 
指标 值 趋 于 稳定 ,其 中 “可 获取 资源 质量 "稳定 在 72% 
的 水 平 , “需求 满足 度 ” 稳 定 在 80% 的 水 平 。 

(3)“ 用 户 科研 产 出 "方面 :OD“ 发 表 文 章 数量 " 指 
标 持续 稳定 增长 ;@* 发文 期 刊 保障 度 " 指标 较为 稳定 
地 维持 在 82% 左右 ;G@ "申请 专利 数量 "持续 快速 增 
加 ;@@* 申 请 专利 中 引用 期 刊 保障 度 " 指标 值 稳定 在 
33% 左右 。 

3.2 ”对 实例 评价 指标 值 测 算 结果 分 析 

通过 分 析 2007 -2010 年 的 科技 支撑 绩效 评价 指 
标 值 测算 结果 ,发 现 中 科 院 集团 引进 的 外 文 电子 期 乔 
对 用 户 的 科研 创新 活动 产生 了 积极 的 科技 支撑 作用 与 
影响 ,主要 表现 在 : 

1) 引导 科研 用 户 查 阅 科技 文献 资源 的 使 用 行为 
同 “ 即 查 即 得 ”的 使 用 方式 。 这 点 从 “ 刊 均 全 文 下 载 

量 对 标 值 的 稳步 增长 得 到 了 验证 。 

于 (2) 有 力 保障 科研 用 户 对 高 品质 科技 文献 资源 的 

害 训 。 从 “可 获取 资源 质量 ”和 “需求 满足 程度 "两 项 
拇 局 值 的 持续 稳定 增长 可 以 充分 说 明 :(D2007 年 集团 
实现 引进 井 外 文 电子 期 刊 4385 种 ,在 2010 年 增长 至 


专利 中 引用 期 刊 保障 度 " 则 稳定 地 维持 在 33% 左右 。 


4 集团 引进 科技 电子 资源 发 展 下 的 科技 
支撑 绩效 评价 发 展 


从 2002 年 到 2020 年 ,中 科 院 各 研究 所 通过 集团 
引进 ,可 获得 的 科技 电子 资源 体 量 以 及 在 科技 电子 资 
el sa 各 研究 所 对 科 
技 支 撑 续 效 评价 的 需求 日 益 强 烈 。 尽 管 通过 实例 评 
ie 
标 体系 具有 一 定 可 操作 性 ,但 与 研究 所 自身 的 评价 目 
的 仍 存 在 一 定 差距 ,也 影响 了 研究 所 开展 相关 绩效 评 
价 工作 。 因 此 ,经 过 多 次 的 实例 分 析 并 结合 研究 所 自 
身 的 评价 目的 ,研究 所 对 科技 支撑 绩效 评价 指标 体系 
提出 了 如 下 改进 意见 : 

(1) 研究 所 在 电子 资源 引进 方面 的 投入 巨大 ,对 
成 本 的 评价 是 研究 所 评价 的 主要 目的 之 一 ,因此 应 增 
加 ”资源 获取 成 本 "评价 内 容 ,评价 引进 资源 的 成 本 情 
况 及 变化 以 及 参加 集团 采购 后 成 本 节约 情况 。 人 
标 包括 :资源 采购 成 本 、 参 加 集团 采购 成 本 降幅 、 资 
价格 涨幅 、 单 篇 下 载 成 本 。 

(2) 在 “用 户 利用 程度 ”评价 方面 ,应 增加 “品种 使 


6 这 种 ,增幅 达到 46. 2% ,而 “可 获取 资源 质量 " 则 稳 
定 硅 72% 水 平 ,有 力 支 撑 着 用 户 对 高 品质 科技 文献 资 
沽 的 需求 ， Og 在 " 刊 均 全 文 下 载 量 "稳步 增长 的 同时 ， 
“ 需 永 满足 度 " 的 稳定 也 表明 引进 的 电子 期 刊 被 用 户 
高 度 关 注 和 利用 。 用 户 引 用 的 外 文 期 刊 有 80% 左右 
来 源 于 集团 引进 的 电子 期 刊 ， 如 此 高 比例 的 保障 度 说 
明 集 团 引 进 的 电子 期 刊 有 力 地 保障 了 我 院 科研 用 户 对 
高 品质 科技 文献 资源 的 需求 。 
(3) 促 进 中 科 院 科研 用 户 的 高 质量 科研 产 出 。 主 
人 申请 专利 中 引用 期 刊 保障 
度 " 两 项 指标 值 的 变化 得 到 此 结论 :中 在 ”发文 期 刊 保 
人 方面 ,伴随 着 中 科 院 ”发 表 文 章 数量 "指标 值 的 
快速 ,持续 增长 ,中科院 用 户 选择 发 文 期 刊 的 范围 也 呈 
现 逐 步 扩 大 趋势 (主要 体现 在 中 科 院 用 户 发 表 文 章 所 
在 的 期 刊 品 种 数量 持续 增长 ,从 2007 年 的 1 722 种 , 扩 
展 至 2010 年 的 1 978 种 ) ,而 “发 文 期 刊 保障 度 ” 则 稳 
定 地 维持 在 83% 左右 ;@ 在 “申请 专利 中 引用 期 刊 保 
障 度 "方面 ,进入 2007 年 ,中 科 院 申请 专利 数量 迅猛 增 
加 ,其 中 对 于 文献 资源 的 引用 数量 也 呈现 快速 增加 的 
趋势 (如 ,2007 年 引用 的 期 刊 品种 数量 为 313 种 ,到 
2010 年 引用 的 期 刊 品 种 数量 增长 至 819 种 ) ,而 “申请 


用 率 “ 使 用 量 排名 ”两 项 评价 指标 。 其 中 ”品种 使 用 
率 ” 可 以 用 来 评价 集团 整 库 引进 电子 资源 的 使 用 效率 ， 
进而 评价 整 库 订购 模式 的 效果 ;“ 使 用 量 排名 ”有 助 于 
研究 所 从 用 量 分 布 评价 资源 保障 效果 。 

(3) 在 “用 户 需 求 保 障 ” 评 价 方面 ,“ 所 均 资源 可 获 
取 数 量 " 调整 为 "人均 资源 可 获取 数量 ” ,消除 人 员 变 
化 对 评价 数据 的 影响 ;增加 "资源 覆盖 时 间 范 围 " 指 
标 , 用 来 反映 引进 资源 覆盖 的 时 段 的 为 用 户 提供 了 怎 
样 的 内 容 拓展 。 

(4) 在 “用 户 科研 产 出 ”评价 方面 ,增加 “SCIE/ 
JCRZEi 收录 期 刊 的 人 均 发 文 数量 ” ,消除 人 员 变 化 对 
评价 数据 的 影响 

这 样 , 既 适用 于 集团 牵头 单位 评价 要 求 也 能 运 
于 研究 所 评价 工作 的 外 文 电子 期 刊 科技 支撑 评价 指 
体系 详 见 表 3。 

改造 后 的 指标 体系 ,包含 了 4 个 评价 方面 .16 项 
评价 指标 ,计算 这 些 评价 指标 值 所 需 的 基础 数据 包含 
研究 所 FTE( 全 职员 工 ,fall-time employee) 、 发 文清 单 、 
引文 清单 .用量 清单 .引进 资源 清单 、 经 费 清 单 等 多 种 
数据 。 为 保证 评价 指标 值 计算 的 正确 性 以 及 对 评价 结 
果 的 实时 查询 性 ,同时 结合 中 科 院 集团 引进 科技 电 


O 
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表 3 外 文 电子 期 刊 科技 支撑 评价 指标 体系 


评价 方面 评价 指标 引 标 涵义 计算 方法 
资源 获取 成 本 ”资源 采购 成 本 在 特定 时 段 内 ,集团 采购 电子 期 刊 的 单 刊 成 本 采购 经 费 /期 刊 种 数 
参加 集团 采购 成 本 降幅 在 特定 时 段 内 ,集团 采购 价格 比 单个 研究 所 采购 价格 的 降幅 。 采购 经 费 / 资 源 国际 标准 定价 -1 
资源 价格 涨幅 资源 价格 较 上 一 年 度 上 涨 比例 当年 采购 经 费 / 上 一 年 采购 经 费 -1 
单 篇 下 载 成 本 在 特定 时 段 内 , 某 期 刊 库 的 篇 均 下 载 成 本 数据 库 采 购 费用 /该 数据 库 下 载 量 
和 户 利用 程度 。 品种 使 用 率 有 使 用 量 期 刊 种 数 占 订购 种 数 的 比例 有 使 用 量 期 刊 种 数 / 订 购 种 数 
刊 均 全 文 下 载 量 在 特定 时 段 内 , 某 期 刊 数据 库 的 刊 均 全 文 下 载 量 某 数据 库 全 文 下 载 量 /有 下 载 量 的 期 刊 种 数 
下 载 量 排名 有 下 载 量 的 期 刊 排名 全 文 下 载 量 排名 
户 需求 保障 ”人 均 资源 可 获取 数量 在 特定 时 段 内 ,人 均 电 子 期 刊 资 源 可 获取 量 订购 期 刊 种 数 /研究 所 FTE 人 数 
可 获取 资源 质量 引进 电子 期 刊 被 SCIJCRZEi 收录 的 比例 引进 电子 期 刊 被 SCILJCRZEi 收录 种 数 / 引 
进 电子 期 刊 种 数 
需求 满足 程度 在 特定 时 段 内 ,用 户 在 SCIAJCR/Ei 期 刊 中 发 文 期 刊 占 本 用户 在 SCIAJCR/Ei 期 刊 中 发 文 期 刊 种 数 / 
研究 所 引进 电子 期 刊 的 上 本 研究 所 引进 的 SCIAJCR/Ei 电子 期 刊 种 数 
资源 覆盖 时 间 范 围 资源 内 容 的 可 使 用 时 间 锋 终止 年 -起 始 年 +1 
科研 产 出 。 SCIE/AJCR/Ei 收录 期 刊 的 发 ”在 特定 时 段 内 ,用 户 在 SCIEAJCR/Ei 收录 的 期 刊 中 发 表 “用户 在 被 SCIAJCR/Ei 收录 的 期 刊 中 发 表 文 
Pan 表 文 章 数量 文章 数量 章 数量 
© SCIEAJCR/Ei 收录 期 刊 的 人 在 特定 时 段 中 ,人 研究 所 在 SCLJCR/B 收录 期 刊 中 人 均 发 户 在 被 SCILJCRZEi 收录 的 期 刊 中 发 表 文 
© 均 发 文 数量 文 数 章 数量 /研究 所 FTE 人数 
© 发 文 期 刊 保障 度 在 特定 时 段 内 ,用 户 发 文中 引用 期 刊 占 本 研究 所 引进 电子 户 发 文 期 刊 种 数 /本 研究 所 引进 电子 期 刊 
< 十 期 刊 的 比例 的 种 数 
© 申请 专利 数量 在 特定 时 段 内 ,用 户 申请 或 公开 专利 的 数量 和 户 在 中 国 专利 局 申请 专利 数据 量 
CD 申请 专利 中 引用 期 刊 保障 度 在 特定 时 段 内 ,用 户 申请 专利 中 引用 期 刊 占 引 进 期 刊 比例 ”专利 中 引用 期 刊 /本 研究 所 引进 电子 期 刊 的 
CN 种 数 
= vc ee 
据 测 源 工 作 的 平台 化 .规范 化 管理 要 求 ,该 评价 指标 体 | 可 行 性 ,尚未 进行 实例 检验 ,这 也 是 本 研究 下 一 步 需要 
系 焉 在 进行 平台 化 开发 一 一 院 所 协同 的 电子 资源 采购 着 力 解 决 的 问题 。 
绩效 评估 体系 和 优化 分 析 服 务 平 台 , 全 院 研究 所 将 通 


过 便服 务 平台 查询 本 所 的 科技 支撑 续 效 评价 结果 ,为 
寞 于 次 浙 保障 效果 提供 数据 支持。 


5 9 结语 


本 文 以 国内 外 成 效 评 佑 的 理论 研究 成 果 为 基础 ， 
以 中 科 院 集团 引进 外 文 电子 期 刊 为 案例 ,构建 了 可 
操作 性 的 电子 资源 科技 支撑 绩效 评价 指标 体系 。 从 
构建 过 程 评价 实践 和 完善 过 程 看 ,明确 评价 需求 是 
推进 评价 工作 的 关键 环节 ,通过 明确 评价 需求 能 
效 界定 评价 方面 和 评价 内 容 , 评 价 结 果 也 能 有 效 响 
应 评价 需求 。 

在 明确 评价 需求 的 过 程 中 ,采用 了 从 单一 评价 主 
体 到 多 元 评价 主体 的 推进 路 线 。 单 一 评价 主体 有 助 于 
聚焦 评价 需求 .设计 可 行 的 评价 指标 体系 ;在 此 基础 上 
拓展 评价 主体 、 调 整 评价 需求 .完善 评价 指标 体系 等 一 
系列 的 工作 ,就 有 “ 章 ” 可 循 。 

本 研究 设计 的 科技 支撑 绩效 评价 指标 体系 ,围绕 
的 是 中 科 院 集团 评价 需求 ,其 服务 于 其 他 科研 机 构 的 
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Study on Scientific Outcome Assessment of E-resources Subscribed by Research Institutions 
一 一 人 Case Study on CAS Consortium ’s Foreign E-journals 
Zhu Xuejun Luo Qishan'’” Zhao Yan'” 
' National Science Library of Chinese Academy of Sciences, Beijing 100190 
”Department of Library, Information and Archives Management, School of Economics and Management, 
University of Chinese Academy of Sciences, Beijing 100190 

S Absiract: | Purpose/significance | This paper mainly introduced the e-resources scientific outcome assessment 
Gaex system and relevant practice carried by National Science Library, CAS, in order to provide useful suggestion for 

entific outcome assessment. | Method/process| Based on the theory and experience of outcome assessment car- 
G8d by the main libraries at home and abroad, the e-resources scientific outcome assessment index system is estab- 

ed and applied to assess foreign e-Journals scientific outcome, and is improved combined with the assessment 
Ze of National Science Library, CAS and CAS’s institutions. | Result/conclusion | The e-resources scientific 
Cuocome assessment index system is operable, and is improved, containing 4 assessment aspects and 16 indicators, to 
Net ihe assessment needs of National Science Library, CAS and CAS’s institutions. 
GAN Keywords: foreign e-journals consortium purchasing ， scientific outcome assessment evaluation index system 
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《图 书 情报 工作 》 杂 志 社 发 布 出 版 伦理 声明 


一 一 一 一 一 一 一 一 


| 为 加 强 和 增进 学 术 论 文 写作 、 评 审 和 编辑 过 程 中 的 学 术 规 范 、 科 研 诚信 与 学 术 道德 建设 ,树立 良好 学 风 , 维扬 

| 科学 精神 ,坚决 抵制 学 术 不 端 ,建立 和 维护 公平 公正、 公开 的 学 术 交 流 生态 环境 ,人 《图书 情报 工作 》 杂 志 社 (包括 《图 
: 书 情报 工作 兴 知 识 管理 论坛 》 两 个 期 刊 编辑 部 ) 结合 两 刊 实际 ,特制 订 出 版 伦理 声明 并 于 2020 年 2 月 正式 发 布 。 

该 出 版 伦理 声明 承诺 两 刊 将 严格 遵守 并 执行 国家 有 关 学 术 道德 和 编辑 出 版 相关 政策 与 法 规 ,规范 作者 、 同 行 

评议 专家 、 期 刊 编辑 等 在 编辑 出 版 全 流程 中 的 行为 ,并 接受 学 术 界 和 全 社会 的 监督 。 共 包括 三 大 部 分 ,总 计 十 五 

条 ,分 别 为 :一 \ 作 者 的 出 版 伦理 (学术 论 文 是 科学 研究 的 重要 组 成 部 分 ;@ 学 术 不 端 是 学 术 论文 的 毒瘤 ;@ 作 者 

是 学 术 论文 的 主要 贡献 者 ;中 作者 署名 体现 作者 的 知识 产权 与 学 术 贡 献 ;名 学 术 论 文 要 高 度 重 视 知识 产权 与 信息 

: 安全 ;@ 参 考 文献 的 规范 性 引用 是 学 术 规 范 的 重要 表征 ;GO 要 高 度 重视 研究 数据 与 管理 的 规范 性 ;@) 建 立 纠 错 与 学 
| 


一 一 一 一 一 一 一 一 一 一 一 一 一 一 


术 自 我 净化 机 制 )。 二 同行 评议 专家 的 出 版 伦理 (@ 同 行 评议 是 论文 质量 的 重要 控制 机 制 ;人 0 评审 专家 应 遵守 论 
文 评审 的 相关 要 求 ; 四 评审 专家 要 严格 遵循 相关 的 伦理 指南 和 行为 准则 )。 三 编辑 的 出 版 伦理 (@@ 编 辑 应 成 为 学 
术 论 文 质量 的 守护 者 ; 虽 编 辑 应 在 学 术 道德 建设 中 发 挥 监 控 作 用 ; 罗 编 辑 要 成 为 遏制 学 术 不 端的 最 后 屏障 ; 介 对 学 
术 不 端 实行 “ 零 容 忍 ”) 。 

全 文 请 见 :http://www. lis. ac. cn/CN/column/ column291. shtml 
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